tg-me.com/Python_Community_ru/2651
Last Update:
🎥 Self Forcing: генерация видео в реальном времени с RTX 4090
Новая техника Self Forcing позволяет обучать видеодиффузионные модели "думать как на инференсе" ещё во время обучения.
🧠 Что делает:
▪️ Имитирует autoregressive-инференс с KV-кэшированием прямо во время обучения
▪️ Устраняет расхождение train/test distributions
▪️ Достигает качества SOTA-моделей, но с реальным временем генерации
▪️ Работает даже на одной RTX 4090
⚙️ Требования:
• GPU с 24 GB+ памяти (4090 / A100 / H100 протестированы)
• Linux
• 64 GB RAM
• Другие конфигурации могут работать, но не проверялись
📌 Выход: стриминговое видео — кадр за кадром, без задержек, на одном потребительском GPU.
💡 Self Forcing — шаг к видеогенерации без лага и мегакластеров.
📦 Основан нп Wan 2.1
💻 Требования: минимум 24 ГБ VRAM и 64 ГБ RAM
🧪 Код открыт, всё работает (пока) только под Linux
Github (https://github.com/assetnote/newtowner)
@Python_Community_ru
BY Python Community
Share with your friend now:
tg-me.com/Python_Community_ru/2651